Voyager minedojo

Voyager — это агент искусственного интеллекта с открытым исходным кодом, управляемый большими языковыми моделями (LLM), который действует автономно в сложной открытой среде Minecraft. Его основное ценностное предложение заключается в демонстрации и развитии возможностей универсальных ИИ-агентов, способных к непрерывному обучению, приобретению навыков и творческому решению проблем без вмешательства человека. Используя код в качестве пространства действий, Voyager может писать, дорабатывать и выполнять собственные программы для достижения огромного множества игровых целей — от простого сбора ресурсов до строительства сложных механизмов, что делает его революционной исследовательской платформой для разработки искусственного общего интеллекта (AGI).

Ключевые возможности: Возможности Voyager сосредоточены вокруг его итеративного механизма prompting, который включает автоматическую учебную программу для постепенно усложняющихся задач, библиотеку навыков для хранения и повторного использования успешного кода и механизм самоисправления. Например, агент может автономно научиться создавать деревянную кирку, затем использовать этот навык для добычи камня, обнаружения железа и в конечном итоге постройки сложного портала в Нижний мир. Он непрерывно исследует мир, курирует свою растущую базу исполняемых программ (навыков) и использует обратную связь от среды для улучшения своих результатов с течением времени, решая задачи, требующие долгосрочного планирования и использования инструментов.

Voyager отличается от других ИИ-агентов или запрограммированных ботов своей основой на модели GPT-4 и уникальной архитектурой, где генерация кода является основным циклом действий, что обеспечивает высокую степень обобщения и комбинируемости. В отличие от узкоспециализированных агентов, Voyager не требует обучения или дообучения под конкретные задачи; он рассуждает и действует на основе накопленных знаний и текущего контекста. Он интегрирован с фреймворком симуляции MineDojo, который предоставляет богатую мультимодальную среду для обучения и оценки. Такой технический подход позволяет ему демонстрировать emergent-поведение и решать новые проблемы, комбинируя ранее изученные навыки новыми способами.

Идеально подходит для исследователей ИИ, компьютерных ученых и институтов, занимающихся обучением с подкреплением, embodied AI и разработкой AGI. Конкретные варианты использования включают изучение алгоритмов непрерывного обучения, тестирование возможностей агентов в открытых средах и создание основ для более практичных автономных систем. Это также ценный образовательный инструмент для аспирантов и лабораторий, изучающих пересечение больших языковых моделей, генерации кода и планирования задач в робототехнике в безопасной симулированной песочнице.

Как исследовательский проект, основной агент Voyager и связанная с ним кодовая база находятся в открытом доступе бесплатно, что соответствует его природе open-source. Однако для работы агента в масштабе требуются значительные вычислительные ресурсы, в основном для запросов к API GPT-4, что влечет расходы в зависимости от использования. Пользователи должны предоставить свой собственный API-ключ и нести расходы на инференс модели, в то время как сама среда MineDojo бесплатна для использования.